В статье о различных аспектах использования Amazon Web Services (на прошлой неделе в Вегасе закончилась конференция AWS re: Invent, поэтому в прессе появляется много интересных материалов) разработчик Pinterest упомянул эксперименты компании в области баз данных:

Pinterest’s Park expressed a similar sentiment during his session, citing a lesson his ( Read more... )

Стартапы в области баз данных медленно, но уверенно, выходят на свои нишевые рынки - корпоративные клиенты постепенно привыкают к облачному хранению и готовы использовать базу данных как сервис, если такой подход обещает какие-то преимущества.

В прошлом году публично себя анонсировал MemSQL, теперь же на рынок выходит TempoDB, заточенная под данные ( Read more... )

Группа инвесторов, среди которых YCombinator, New Enterprise Associates и Эштон Кутчер, вложила $2,1 млн в стартап MemSQL, планирующий разработать высокопроизводительную базу данных, которая за основу берет работу в DRAM-памяти, а не на диске.

Большинство используемых сегодня баз данных зародились как дисковые, после чего к ним был додуман ( Read more... )

В комментариях к записи о Level DB подсказали релиз Rethink DB, которая поддерживает протокол Memcached и теоретически может сервер Memcached полностью заменить. Попутно предлагая такие вещи как поддержку обьектов весом до 10 мег, оптимизацию под хранилища solid state и ускорение производительности.

Упор на сохранение данных, поэтому все пишет на ( Read more... )

LevelDB - база для хранения данных в нереляционном формате key-value. От BerkeleyDB отличается скоростью, от Redis возможностью хранения данных на жестком диске, от Tokyo Cabinet улучшенной скоростью записи данных и другой внутренней структурой данных (LSM-tree, а не btree).
оригинал: http://moskalyuk.name/3493

Джон Чианкутти из Netflix опубликовал пять уроков, через которые пришлось пройти при миграции инфраструктуры компании на амазоновские вэб-сервисы.

1. Скорость работы сети в облаке будет пониже, чем в собственном дата-центре. Итого пришлось переработать некоторые API, которые отправляли частые запросы.
2. Процессы приходится программировать с расчетом на ( Read more... )

Каннан на странице Facebook Engineering опубликовал небольшую заметку о выборе системы хранения данных для новых сообщений на Facebook. Выбор пал между тремя пакетами:

• MySQL, который вроде как все знают, и который в компании с первого дня, когда Марк запустил сайт на платном хостинге. Ссылку ставить даже нет смысла.
• Cassandra, которая теперь под ( Read more... )

Kак Netflix отгружает и сайт, и цифровые фильмы с ресурсов Amazon Web Services. Для контекста - по некоторым оценкам 20% даунстрим-трафика в США в 2009 пришлось на видео с Netflix.

• Все началось с оцифровки в Лос-Анджелесе - у Netflix есть целое подразделение, лицензирующее фильмы у киностудий, в результате чего Netflix получает иногда цифровую ( Read more... )

Cloudera подняла еще $25 млн на развитие Hadoop для предприятий. Последний раз когда я столкнулся с моим экс-коллегой, их нынешним вице-президентом, в аэропорту, тот как раз улетал на какую-то фармацевтическую конференцию. Ибо вроде как все деньги там - клинические исследования, и т.д. Ну или в настройке Хадупа для различных долиновских стартапов.
( Read more... )

Cloudant - попытка максимально упростить облачное использование апачевского CouchDB. В максимально короткие сроки обещают создание и поддержку новых баз данных. Это в довесок к тому, что CouchDB (книгу по которой можно бесплатно почитать здесь) уже не особо требовательна к платформе: клиент под нее публикует/обновляет/удаляет записи с помощью ( Read more... )